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© 2.1 Fur die Bestimmung der Bewegungsvektoren 
werden im allgemeinen die Phasenkorrelationsme- 
thode oder die Suchmethode eingesetzt. Das neue 
Verfahren soil eine Verbesserung der Bewegungs- 
schatzung in bewegten Bildsequenzen bewirken. 

2.2 ErfindungsgemaG wird unter Verwendung ei- 
nes zusatzlichen Filters, das eine Rasterverschie- 
bung des Originalrasters bewirkt, in einem ersten 
Verfahrensschrttt der Suchbereich und in einem 
zweiten Verfahrensschritt der Matchblock gefiltert. 
AnschlieBend findet der eigentliche Matchprozefi in 
der ublichen Weise statt. 

2.3 Das erfindungsgemafie Verfahren wird insbe- 
sondere bei der Codierung von Bildsequenzen fur 
die Bildubertragung von HDTV bis Bildfernsprechen, 
im interaktiven Multimediabereich oder fur eine qua- 
litativ hochwertige Normwandlung fur Bewegtbtldsze- 
nen eingesetzt. 
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Die Erfindung betrifft ein verfahren zur Verbes- 
serung der Bewegungsschatzung in Halbpetgenau- 
igkeit basierend auf der vollstandigen Suchmetho- 
de (full search) oder einem Zwei bis Mehrschritt- 
suchverfahren (z. B. log (D) step search) in beweg- 
ten Bildsequenzen. 

Bei der Codierung von Bildsequenzen fur die 
Bildubertragung von HDTV bis Bildfernsprechen, 
im interaktiven Multimediabereich oder bei einer 
qualitativ hochwertigen Normwandlung fur Bewegt- 
bildszenen, spielen Bewegungsvektoren eine zen- 
trale Rolle. Durch den Vergleich zweier aufeinan- 
derfolgender Bilder kann die Verschiebung eines 
Objektes von einem zum nachsten Bild bestimmt 
werden. Hierbei wird das Bild ublicherweise in 
Blocke aufgeteilt mit BlockgroBen von 8 x 8 bis 16 
x 16 Bildpunkten. Die BlockgroBe spielt jedoch im 
folgenden keine Rolle. Die so gewonnenen 
Verschiebungs- bzw. Bewegungsvektorenwerden 
bei Bitratenreduktionstechniken vom Sender zum 
Empfanger ubertragen und im Empfanger zur Re- 
konstruktion eines Bildes auf der Basis des vorher- 
gehenden benutzt. Bei Normwandlungen werden 
sie benutzt, um zeitlich dazwischenliegende Bilder 
zu erzeugen. 

Fur die Bestimmung der Bewegungsvektoren 
werden im allgemeinen zwei Verfahren eingesetzt: 
1. die Phasenkorrelationsmethode oder 2. die 
Suchmethode, die aufgeteilt werden kann in Ein- 
schrittverfahren (vollstandige Suchmethode (full se- 
arch method)), in Zweischrittverfahren oder in 
Mehrschrittverfahren (z. B. log (D) step search). 

Der Suchmethode liegt folgender Ablauf zu 
Grunde: Adressgeneratoren bestimmen die Adres- 
se der ersten Position im Suchbereich und die 
Adresse des Matchblockes. Die Differenz je zweier 
zugeordneter Pixelwerte wird betragsmBig oder 
auch quadratisch aufsummiert und gibt dann ein 
MaB fur die Abweichung des Matchblockes vom 
entsprechenden Block im Suchbereich. Abwei- 
chung und Position im Suchbereich werden gespei- 
chert. Fur die nachste Position im Suchbereich 
wird ebenfalls die Abweichung berechnet. Das Mi- 
nimum von bereits gespeicherter und neu berech- 
neter Abweichung mit der dazugehorigen Position 
wird gespeichert Sind alle Positionen des Suchbe- 
reiches durchlaufen, wird die minimale Abweichung 
mit der entsprechenden Position ausgegeben. 

Beim Suchverfahren in Halbpelgenauigkeit in 
ein oder mehreren Schritten mussen Zwischenpi- 
xelwerte interpoliert werden. Die Originalpixelwerte 
bleiben unverandert. Beim Einschrittverfahren 
(vollstandige Suchmethode) werden im gesamten 
Suchbereich die Zwischenpixelwerte interpoliert. 
Danach wird in einem Matchprozess wie er oben 
beschrieben ist, die Lage der besten Ubereinsttm- 
mung ermittelt. Die Positionierungsanderung ist da- 
bei jeweils 1/2 pel Abstand. Bei Zweischrittverfah- 



ren wird erst auf den Originalbildern die Lage der 
besten Ubereinstimmung ermittelt und dann die 
Halbpelumgebung abgesucht. Bei Mehrschrittver- 
fahren wird erst auf gefilterten und unterabgetaste- 

5 ten Bildern der Ort der besten Ubereinstimmung 
ermitteltund dann in der Umgebung des jeweils 
gefundenen Punktes weitergesucht. 

Im folgenden werden Bewegungsvektoren, de- 
ren horizontale (x-) oder vertikale (y-) Komponente 

io eine Lange von einem geradzahligen Vielfachen 
von 1/2 pel Abstand aufweist (also 0 pel,±1 pel, ±2 
pel, ...), eine ganzpel x- bzw. y-Komponente ge- 
nannt. Bewegungsvektoren, deren horizontale (x-) 
oder vertikale (y-) Komponente eine Lange von 

75 einem ungeradzahligen Vielfachen von 1/2 pel Ab- 
stand aufweist (also ±1/2 pel, ±3/2 pel, ...)werden 
eine halbpel x- oder y-Komponente genannt. 

Die bisherigen Verfahren haben auf Grund sta- 
tistischer Eigenschaften stark unterschiedliche 

20 Wahrscheinlichkeiten fur das Auftreten eines Bewe- 
gungsvektors mit halbpel x- oder y-Komponente 
und eines Bewegungsvektors mit ganzpel x- oder 
y-Komponente. Werden auf Grund des vorliegen- 
den Bildmaterials etwa gleich viele Bewegungsvek- 

25 toren mit halbpel x- bzw. y-Komponente und mit 
ganzpel x- bzw. y-Komponente erwartet, so zeigt 
sich, dafl bei den bisherigen Suchverfahren dies 
nicht der Fall ist, wobei es naturlich zufallig mog- 
lich ist, daB diese unterschiedliche Wahrscheinlich- 

30 keit nicht zu Tage tritt. Beim vollstandigen Ein- 
schrittsuchverfahren treten erheblich mehr Bewe- 
gungsvektoren mit halbpel Komponenten auf. 

Am deutlichsten ist dies bei Rauschbildern, d. 
h. Bildern, bei denen Nachbarpixel unkorreliert sind 

35 und jeder Pixel den Wert zwischen 0 und 255 mit 
gleicher Wahrscheinlichkeit annehmen kann 
(rechteckformige Verteilung). Wird jetzt die Wahr- 
scheinlichkeitsverteilung eines aus 2 Nachbarpixeln 
linear interpolierten Zwischenpixelwertes berechnet, 

40 so ergibt sich eine dreiecksformige Verteilung. 
Mittlere Pixelwerte sind also wesentlich wahr- 
scheinlicher als sehr kleine oder sehr groBe Pixel- 
werte. 

Auch eine bessere als die lineare Interpolation 
45 ergibt eine von der rechteckformigen Verteilung 
stark abweichende Verteilkurve (wird zur Interpola- 
tion ein Filter mit der vollen rechteckformigen Fre- 
quenzcharakteristik herangezogen, so hat die sich 
ergebende Verteilung Ahnlichkeiten mit einer Glok- 
50 kenkurve). 

Beim MatchprozeB werden jetzt Blocke mit un- 
terschiedlichen Wahrscheinlichkeitsverteilungen 
verglichen. 

Auch normale Bildsequenzen haben unter- 
55 schiedliche Wahrscheinlichkeitsverteilungen an 
Pixel- und Zwischenpixelwerten, diezu einer unter- 
schiedlichen Wahrscheinlichkeit fur das Auftreten 
von halbpel oder ganzpel Komponenten der Bewe- 
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gungsvektoren fuhren und damit das Bewegungs- 
vektorfeld verfalschen. Die technische Aufgabe, die 
gelost werden soli, besteht darin, ein Verfahren zur 
Verbesserung der Bewegungsschatzung in beweg- 
ten Bildsequenzen zu entwickeln, durch das die bei 
den bisher bekannten Verfahren moglichen Verfal- 
schungen des Bewegungsvektorfeldes, die durch 
die unterschiediichen Wahrscheinlichkeitsverteilun- 
gen an Pixel- und Zwischenpixelwerten bedingt 
sind, vermieden werden. Die technische Aufgabe 
wird mittels eines Verfahrens gelost, bei dem in 
einem ersten Verfahrensschritt der Suchbereich 
und in einem zweiten Verfahrensschritt der Match- 
block gefiltert werden. Das geschieht mittels eines 
zusatzlichen digitalen Filters.das eine Rasterver- 
schiebung des Originalrasters um 1/4 pel, sowohl 
in horizontal als auch in vertikale Richtung, er- 
moglicht. Nach den erfindungsgemaBen Verfah- 
rensschritten der Vorfilterung findet dann der ei- 
gentliche MatchprozeB fur den Blockmatchingpro- 
zeB mit den Pixel werten des gefilterten Suchberei- 
ches und des gefilterten Matchblockes (im ver- 
schobenen Raster) statt. 

Die erfindungsgemaBe Losung wird anhand ei- 
nes Ausfuhrungsbeispiels naher erlautert. Dabei 
zeigt: 

Fig. 1 eine Abbildung des Schemas des er- 
findungsgemaBen Verfahrens in Halb- 
pelgenauigkeit mit Vorfilterung 

Fig. 2 eine Abbildung des Schemas des be- 
kannten vollstandigen Suchverfahrens 
mit Interpolation der Zwischenpixel- 
werte 

Fig. 3 das Originalraster mit Zwischenraster- 
punkten im Suchbereich nach dem 
bereits bekannten Verfahren mit Inter- 
polation der Zwischenpixelwerte 

Fig. 4 das Originalraster und das phasenver- 
schobene Raster im Suchbereich 
nach dem erfindungsgemaBen Verfah- 
ren 

Fig. 5 das Originalraster und das phasenver- 
schobene Raster fur den Matchblock 
nach dem erfindungsgemaBen Verfah- 
ren 

Die bisher bekannte Suchmethode ist in Fig. 2 
dargestellt. Diese Suchmethode kann in Bezug auf 
den ersten Verfahrensschritt, der die Interpolation 
der Zwischenpixelwerte beinhaltet, im Einschrittver- 
fahren (vollstandige Suchmethode; full search me- 
thod), im Zweischrittverfahren oder im Mehrschritt- 
verfahren (z. B. log (D)step search) durchgefuhrt 
werden. Die Originalpixelwerte 1 bleiben dabei un- 
verandert. Der sich an die Interpolation der Zwi- 
schenpixelwerte 2 anschlieBende eigentliche, be- 
reits bekannte MatchprozeB lauft nach folgenden 
Verfahrensschritten ab: 



- durch AdreBgeneratoren wird die Adresse der 
ersten Position im Suchbereich und die 
Adresse des Matchblockes bestimmt, 

- die Differenz je zweier zugeordneter Pixel- 
5 werte wird betragsmaBig oder quadratisch 

aufsummiert und gibt dann ein MaB fur die 
Abweichung des Matchblockes vom entspre- 
chenden Block im Suchbereich an, 

- Abweichung und Position im Suchbereich 
w werden gespeichert, 

- fur die nachste Position im Suchbereich wird 
ebenfalls die Abweichung ermittelt. Das Mini- 
mum von bereits gespeicherter und neu er- 
mittelter Abweichung mit der dazugehorigen 

15 Position wird gespeichert. 

- wenn alle Positionen des Suchbereiches 
durchlaufen sind, wird die minimale Abwei- 
chung mit der entsprechenden Position aus- 
gegeben. 

20 In Figur 1 ist eine Abbildung des Schemas des 

erfindungsgemaBen Verfahrens enthalten. Hierbei 
erfolgt vor dem oben beschriebenen bekannten 
MatchprozeB, anstatt der Interpolation der Zwi- 
schenpixelwerte, mittels eines geeigneten digitalen 

25 Filters, in einem ersten Verfahrensschritt eine Filte- 
rung des Suchbereiches und in einem zweiten Ver- 
fahrensschritt eine Filterung des Matchblockes. 

Durch diese zusatzlichen Schritte ist es mog- 
lich, die unterschiediichen Wahrscheinlichkeitsver- 

30 teilungen und damit die Verfalschung des Bewe- 
gungsvektorfeldes auszuschlieBen. Bei der Filte- 
rung des Suchbereiches kann folgendermaBen vor- 
gegangen werden: Die Zwischenpixelwerte werden 
als Punkte mit dem Wert 0 eingefugt. In bisherigen 

35 Anwendungen wurden dann Zwischenrasterpunkte 
2 - wie in Fig. 3 dargestellt - erzeugt.Das hier 
dagegen vorzugsweise zur Anwendung kommende 
digitale FIR-Filter muB die Eigenschaft haben, das 
Originalraster zu verschieben, wobei die Verschie- 

40 bung in der GroBenordnung von 1/4 pel Abstand 
liegen sollte, wie in Fig. 4 fur den Suchbereich und 
in Fig. 5 fur den Matchblock verdeutlicht. 

Die Zwischenpixelwerte 3 im Suchbereich un- 
terliegen ebenfalls der Phasenverschiebung und 

45 werden ublicherweise bei der Filterung gleich mit- 
bestimmt. Das sich dann ergebende Raster ist in 
Fig. 4 dargestellt. Fur einen Pixel ist die Verschie- 
bung durch einen kleinen Pfeil dargestellt. Wird 
vom engmaschigen Raster des aufgeblahten Such- 

50 bereiches aus Fig. 3 ausgegangen, so wird das 
Raster in Figur 4 durch eine Filterung mit einem 
Filter der Phase 180° (mod 360°) gewonnen. Im 
aufgeblahten Raster bewirkt dieses Filter eine Ver- 
schiebung um 1/2 pel, wogegen im nichtaufgeblah- 

55 ten ursprunglichen Raster die Verschiebung 1/4 pel 
betragt. 

Als derartige Filter mit einer Rasterverschie- 
bung von 1/2 pel (bzw. 1/4 pel ) werden beispiels- 
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weise symmetrische QMF-Filter mit geradzahliger 
Koeffizientenzahl verwendet, deren Symmetrie- 
punkt zwischen den 2 mittleren Koeffizienten liegt. 
Eine der beiden Polyphasenkomponenten des Fil- 
ters andert die Originalpixelwerte 1, die andere 
Polyphasenkomponente berechnet die Zwischenpi- 
xelwerte 3. 

Bei der Filterung des Matchblockes ist es am 
sinnvollsten, die Polyphasenkomponente zu benut- 
zen, mit der im Suchbereich die Originalpixelwerte 
1 gefiltert wurden. Die Filter bewirken eine horizon- 
tale und vertikale Verschiebung des Bildes urn 1/4 
pel (Fig. 5). Dies geschieht gleichmaBig im Such- 
bereich und im Matchblock, so daB eine Verschie- 
bung keinen EinfluB auf die Bewegungsvektoren 
hat. Wird die andere Polyphasenkomponente be- 
nutzt, mussen die Bewegungsvektoren entspre- 
chend geandert werden. Bei Benutzung anderer 
Filter ist es wesentlich, daB die Phasenverschie- 
bung im Originalraster etwa 90° oder 1/4 pel be- 
tragt. 

Der eigentliche Matchprozefi fur den Blockmat- 
chingprozeB findet dann mit den Pixelwerten 3 und 
4 des gefilterten Suchbereiches und den Pixelwer- 
ten 3 des gefilterten Matchblockes (im verschobe- 
nen Raster) statt. Der wesentliche Punkt ist somit 
die Vorfilterung des Suchbereiches und des Match- 
blockes mit Filtern, die eine Rasterverschiebung 
des Originalrasters 1 um 1/4 pel Abstand bewirken. 
Dieses Ver fahren ist auf 1/2 pel genaue Bewe- 
gungsschatzung beschrankt. Nach einer solchen 
Vorfilterung ist die Wahrscheinlichkeitsverteilung 
von Rauschbildern fur alle Pixelorte gleich und man 
erhalt halbpel und ganzpel Komponenten der Be- 
wegungsvektoren mit gleicher Wahrscheinlichkeit. 
Auch bei naturlichen Bildsequenzen wird die Ge- 
nauigkeit der Bewegungsvektoren mit diesem Ver- 
fahren erhoht. 

Bei Zwei- oder Mehrschrittverfahren wird erst 
ein pelgenauer Bewegungsvektor mit bisher ubli- 
chen Methoden bestimmt. Vor dem letzten Schritt 
zur Bestimmung der Bewegungsvektoren auf 
halbpel-Genauigkeit werden Suchbereich und 
Matchblock nach oben angegebenem Verfahren 
gefiltert. 

Patentanspruche 

1. Verfahren zur Verbesserung der Bewegungs- 
schatzung in bewegten Bildsequenzen in Halb- 
pelgenauigkeit mit vollstandiger Suchmethode 
im Einschritt-, Zweischritt und Mehrschrittver- 
fahren dadurch gekennzeichnet, daB vor dem 
eigentlichen BlockmatchingprozeB mittels ei- 
nes digitalen Filters.das sowohl eine horizonta- 
le als auch eine vertikale Rasterverschiebung 
des Originalrasters um 1/4 pel bewirkt, in ei- 
nem ersten Verfahrenssschritt der Suchbereich 



und in einem zweiten Verfahrensschritt der 
Matchblock gefiltert werden, wobei im Suchbe- 
reich mittels einer Polyphasenkomponente des 
digitalen Filters die Originalpixelwerte geandert 

5 und mittels der anderen Polyphasenkomponen- 

te die Zwischenpixelwerte erzeugt werden, und 
wobei anschliefiend im Matchblock vorzugs- 
weise mit der Polyphasenkomponente des di- 
gitalen Filters gefiltert wird, mit der im Suchbe- 

w reich die Originalpixelwerte gefiltert wurden. 
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© 2.1 Fur die Bestimmung der Bewegungsvektoren 
werden im allgemeinen die Phasenkorrelationsme- 
thode oder die Suchmethode eingesetzt. Das neue 
Verfahren soil eine Verbesserung der Bewegungs- 
schatzung in bewegten Bildsequenzen bewirken. 

2.2 ErfindungsgemaG wird unter Verwendung ei- 
nes zusatzlichen Filters, das eine Rasterverschie- 
bung des Originalrasters bewirkt, in einem ersten 
Verfahrensschritt der Suchbereich und in einem 
zweiten Verfahrensschritt der Matchblock gefiltert. 
AnschlieBend findet der eigentliche MatchprozeB in 
der ublichen Weise statt. 

2.3 Das erfindungsgemafle Verfahren wird insbe- 
sondere bei der Codierung von Bildsequenzen fur 
die Bildubertragung von HDTV bis Bildfernsprechen, 
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